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DaimlerChrysler AG Farago/Bopple 



Verfahren und Vorrichtung zur Bestiamung 
der 3D-Position von PKff-Insassen 



Die vorliegende Erfindung betrifft allgemein ein Verfahren 
und eine Vorrichtung zur Bestimmung der 3D-Position 'und ins- 
bespndere ein Verfahren und eine Vorrichtung zur Bestimmung 
der 3D-Kopfposition und/oder Kopfhaltung eines Fahrers Oder 
Beifahrers eines Pkw's. Das erf indungsgemaiie Verfahren bzw. 
die erf indungsgemaiie Vorrichtung eignet sich besonders zur 
Blickrichtungserkennung eines Fahrers oder Beifahrers eines 
Pkw f s sowie zur Mudigkeitsdetektion. Daruber hinaus stellt 
das erf indungsgemaiie Verfahren bzw. die erf indungsgemaiie Vor- 
richtung eine Moglichkeit zur Bestimmung des Zustands der 
Augenlieder eines Fahrers oder Beifahrers eines Pkw's zur 
Verf iigung . 



Stand der Technik 

Verfahren zur Verknupfung mehrerer Sensoren zur Bestimmung 
der 3D~Position von Objekten im Raum sind im Zusammenhang mit 
sogenannten "Virtual Reality"-Verf ahren bekannt. Dabei nimmt 
beispielsweise ein elektromagnetisches Tracking-System zum 
einen die Kopfposition und die Sichtrichtung eines Benutzers 
auf, was als Head-Tracking bezeichnet wird. Zum anderen nimmt 
das elektromagnetische Tracking-System die Position eines 3D- 
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Eingabegerats auf (z. B. Stift, 3D- Joystick, Datenhandschuh 
usw.) . Mit diesen 3D-Eingabegeraten hat ein Benutzer die 
Moglichkeit, mit den Daten direkt in Wechselwirkung zu 
treten, d. h. er hat die Moglichkeit, sich in der virtuellen 
Welt zu bewegen und die Datenobjekte anzufassen, zu drehen 
und zu skalieren. 

Ebenfalls sind aus dem Stand der Technik Stereoverf ahren zur 
Blickrichtungserkennung von Fahrzeuginsassen bekannt, 
beispielsweise FaceLab™ der Firma Seeingmachines . 

Aus der US-B1-6 324 453 ist ein Verfahren zur Erkennung und 
Bestimmung der Position eines Pkw-Fahrers bzw. Beifahrers 
bekannt, wobei ein IR-Sensor Oder eine Vielzahl von IR-Sen- 
soren eingesetzt werden. Mittels der IR-Sensoren wird der zu 
iiberwachende Pkw-Fahrer erf asst. Die erfasste Information 
wird dabei anhand von vorgegebenen Mustern ausgewertet, urn 
die Position des Fahrers bzw. Beifahrers fur eine gesteuerte 
Auslosung des Airbags heranzuziehen . Durch diese Steuerung 
soil die Verletzung des Fahrers bzw. Beifahrers bei einer 
unf allbedingten Auslosung des Airbags vermieden werden. Die 
Mustererkennung erfolgt mit Hilfe eines neuronalen Netzwerks 
oder eines neuronalen Fuzzy-Systems, das die Pkw-Insassen 
erkennt. In einigen Anwendungen gemaJi der US-B1-6 324. 453 
wird das Mustererkennungssystem mit einer Bildbibliothek 
ausgestattet, die es erlaubt, einen Vergleich mit den 
erfassten Bildern zu machen, wodurch eine relativ genaue 
Positionsbestimmung der sitzenden Pkw-Insassen moglich ist, 
wobei vermieden wird, dass eine Erfassung der Kopfposition 
erforderlich ist. 

Eine Vorrichtung zur Bestimmung der Kopfposition eines Pkw- 
Insassen in Anwesenheit von Gegenstanden, die die Sicht von 
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Sensoren zum Kopf des Insassen verdecken, ist aus der US-Bl-6 
088 640 bekannt. Die Vorrichtung der US-Bl-6 088 640 ist dazu 
ausgebildet, die Kopfstiitzen eines Pkw's durch Schrittmotoren 
optimal zur Kopfposition eines Insassen zu positionieren, urn 
im Falle einer Kollision mit einem nachf ahrenden Pkw, 
Verletzungen der Insassen zu vermeiden. In einer 
Aus fiihrungs form der US-Bl-6 088 640 besteht die Sensorik zur 
Bestimmung der Kopfposition eines Fahrzeuginsassen aus einem 
Ultraschallsender, einem Ultraschallempf anger und einem 
Kontaktsensor, die alle in einer Kopfstutze des Pkw's 
angebracht sind. Die Ultraschallsensoren bestimmen den 
Abstand des Kopfes zur Stutze und regeln solange deren Po- 
sition, bis der Abstand einen minimalen Wert einnimmt. Die 
Ultraschallsensoren bestimmen auch den LSngenabstand der 
Kopfstutze zum Kopf des Insassen. Letztere Bestimmung kann 
durch die ungenaue Ausrichtung des Kopfes mit den Ultra- 
schallsensoren oder durch interf erierende Gegenstande wie 
z.B. Hut, Kragen oder Frisur des Insassen falsche Ergebnisse 
liefern. Diese Fehlerquelle wird beseitigt, indem die Bewe- 
gung der Kopfstutze beim Kontakt des Kopfes mit dem Kontakt- 
sensor gestoppt wird. Somit kann eine optimale Position der 
Kopfstutze bestimmt werden. In einer Abwandlung werden in der 
US-Bl-6 088 640 ein Ultraschallsender und drei Ultraschall- 
empf anger bereitgestellt, und die Erfassung der Kopfposition 
erfolgt mittels eines neuronalen Netzwerks oder eines anderen 
Mustererkennungssystems, Diese Anordnung mit einer Vielzahl 
von Ultraschallempfangern, die an einer Vielzahl von Stellen 
an der Kopfsttitze angeordnet sind, gestattet eine Erkennung 
der Kopfposition, selbst wenn ein Hindernis, wie oben 
erwahnt , vorliegt . 

Angesichts des Standes der Technik ist es eine Aufgabe der 
vorliegenden Erfindung ein Verfahren und eine Vorrichtung zur 
Bestimmung von 3D-Positionen bereitzustellen, das bzw. die 
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zuveriassig und auf eine einfache Art und Weise, unter 
Verwendung von mehr als einer Kamera, die Kopfposition von 
Fahrzeuginsassen bestimmt. 

5 Im Rahmen der obigen Aufgabe besteht eine weitere Aufgabe der 
Erfindung in der Bereitstellung eines Verfahrens und einer 
Vorrichtung zur Erkennung der Blickrichtung eines Insassen 
eines Pkw's. Daruber hinaus besteht eine zusatzliche Aufgabe 
der vorliegenden Erfindung in der Bereitstellung eines Ver- 
io fahrens und einer Vorrichtung zur Detektion und Verfolgung 
der Augenlieder von Fahrzeugsinsassen . 

Zusammenf assung der Erfindung 

15 Diese Aufgabe sowie weitere der nachstehenden Beschreibung zu 
entnehmenden Aufgaben werden mit einem Verfahren 
bereitgestellt, das zur Bestimmung der 3D-Position von 
Fahrzeuginsassen die folgenden Schritte umfasst: Beobachtung 
der Fahrzeuginsassen mit mindestens zwei Kameras, die derart 

2 0 angeordnet sind, dass diese nicht notwendigerweise nach einem 

Stereoansatz betrieben werden mussen; Extraktion geeigneter 
' Merkmale aus den erfassten Videodaten der Fahrzeuginsassen; 

Initialisierung eines Trackingschritts anhand eines 

Kopfmodells; Verifikation der extrahierten Merkmale mittels 
25 Mustererkennung; und Tracking der verif izierten Merkmale 

anhand des Kopfmodells. 

Die erf indungsgemalie Vorrichtung zur Bestimmung der 3D-Posi- 
tion von Fahrzeuginsassen umfasst folgendes: mindestens zwei 

3 0 Kameras zur Beobachtung der Fahrzeuginsassen, die derart 

angeordnet sind, dass diese nicht notwendigerweise nach einem 
Stereoansatz betrieben werden mussen; und einen Controller, 
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der folgendes umfasst: Mittel zur Extraktion geeigneter 
Merkmale aus den erfassten Videodaten der Fahrzeuginsassen; 
Mittel zur Initialisierung eines Trackingschritts anhand 
eines Kopfmodells; Mittel zur Verifikation der extrahierten 
5 Merkmale mittels Mustererkennung; und Mittel zum Tracking der 
verif izierten Merkmale anhand des Kopfmodells. 

Weitere vorteilhafte Merkmale der Erfindung sind in den an- 
liegenden Unteranspruchen ausgefuhrt. 

10 

Weitere Merkmale und Vorteile der vorliegenden Erfindung so- 
wie der Aufbau und die Wirkungsweise verschiedener Ausfuh- 
rungsformen der vorliegenden Erfindung werden unten mit Bezug 
auf die begleitenden Zeichnungen beschrieben. Die begleiten- 
15 den Zeichnungen veranschaulichen die vorliegende Erfindung 
und dienen zusammen mit der Beschreibung weiterhin dazu, die 
Grundsatze der Erfindung zu erklaren und einem Fachmann auf 
dem betreffenden Gebiet zu ermoglichen, die Erfindung zu im- 
plementieren und zu verwenden. Dabei zeigt: 

20 

Fig. 1 eine schematische Darstellung einer ersten Aus- 
fiihrungsform der erf indungsgemafien Vorrichtung; und 

Fig. 2 eine schematische Darstellung einer zweiten Aus- 
fuhrungsform der erf indungsgemSlien Vorrichtung. 

25 

Beschreibung der bevorzugten Ausf tihrungsf ormen der Erfindung 

Unter Bezugnahme auf die Fig. 1 wird eine erste Ausfiihrungs- 
form der erf indungsgemalien Vorrichtung zur Bestimmung der 
3 0 Kopf posit ion von Fahrzeuginsassen gezeigt, in der zwei Kame- 
ras 1 und 2 im Frontbereich eines schematisch gezeigten 
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Fahrzeugs 10 wie gezeigt angebracht sind. In einer besonders 
bevorzugten Ausgestaltungsf orm der Erfindung konnen die 
Kameras auch derart angebracht sein, dass sich diese direkt 
vor dem Gesichtsfeld des Fahrers befinden, insbesondere an 
5 der Instrumententaf el angebracht sind. Die Kameras 1 und 2 
konnen fest ausgerichtet sein oder mit Hilfe von nicht ge- 
zeigten Stellmotoren jeweils auf einen Fahrer und einen Bei- 
fahrer ausgerichtet werden. Wobei entweder die Kameras 
kalibriert werden miissen, beispielsweise unter Zuhilf enahme 

10 eines Schachbrettmusters, oder aber die gegenseitige Position 
und Orientierung der Kameras bekannt sein muss.* Es ist 
denkbar, jeweils ein Kamerapaar fur den Fahrer bzw. Beifahrer 
zur Verfugung zu stellen. Die Kameras 1 und 2 sind uber einen 
geeignete Verbindung oder Obertragungsstrecke (z. B. 

15 Glasfaser, Bluetooth, WLAN, Verdrahtung oder dergleichen) mit 
einem gestrichelt gezeigten Controller 3 verbunden, der 
beispielsweise im Bordcomputer des Fahrzeugs 10 implementiert 
werden kann. 

20 Nach einem wichtigen Aspekt der vorliegenden Erfindung miissen 
die Kameras 1 und 2 nicht notwendigerweise nach einem 
Stereoansatz betrieben werden. Die Kameras 1 und 2 sind auch 
nicht notwendigerweise synchronisiert . Es ist daher moglich, 
die Kameras 1 und 2 mit unterschiedlichen Blickfeld^rn so zu 
25 positionieren, dass ein Auge eines Fahrers 4 immer sichtbar 
ist. Diese Positionierung ist erf indungsgemafi nicht 
problematisch, da das Blickfeld des Kammerapaars 1 und 2, wie 
erwahnt, nicht notwendigerweise einem Stereoansatz genugen 
muss, so dass das Blickfeld wesentlich grofier als beim 
30 Stereoansatz sein kann. 

Die Kameras 1 und 2 konnen beispielsweise im sichtbaren Be- 
reich oder im IR-Bereich betrieben werden. Es ist jedoch auch 



P800073/DE/1 



7 



mSglich abbildende Sensoren, welche in anderen 
Wellenlangenbereichen arbeiten, mit analoger Wirkungsweise 
erfindungsgemafi zum Einsatz zu bringen. 

Der Controller 3 empfangt die Videodaten von den Kameras 1 
und 2, extrahiert geeignete Gesichts- bzw. Formmerkmale des 
Insassen (z. B. Augen, Nasenlocher, Mundwinkel, Augenbrauen, 
Haaransatz usw.)/ und fuhrt ein an und fur sich bekanntes 
Trackingverfahren aus, das nachstehend in Verbindung mit der 
Wirkungsweise der erf indungsgemailen Vorrichtung erlautert 
wird. 

Unter Bezugnahme auf die Fig. 2 wird eine zweite Ausflih- 
rungsform der erf indungsgemaiien Vorrichtung zur Bestimmung 
der Kopf position von Fahrzeuginsassen gezeigt, in der eine 
erste Kamera 1' im Frontbereich des schematisch gezeigten 
Fahrzeugs 10 und eine zweite Kamera 2' in dessen Seitenbe- 
reich wie gezeigt angebracht sind. 

Analog zur Fig. 1 konnen die . Kameras l 1 und 2 f der Fig. 2 
fest ausgerichtet sein oder mit Hilfe von nicht gezeigten 
Stellmotoren jeweils auf den Fahrer, den Beifahrer oder einen 
weiteren Insassen ausgerichtet werden. Die Kameras l f und 2 1 
der Fig. 2 sind erfindungsgemali ebenfalls nicht 
notwendigerweise nach einem Stereoansatz positioniert und 
sind auch nicht notwendigerweise synchronisiert . Somit wird, 
wie mit der Anordnung der Fig. 1, ein grSfieres Sichtfeld 
bereitgestellt . 

Die nachstehend geschilderte Wirkungsweise der Ausfuhrungs- 
formen der Figuren 1 und 2 ist gleich. 
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Zunachst werden in einem ersten Schritt gemafi der Erfindung 
der Insasse bzw. die Insassen des Fahrzeugs mit derart ange- 
brachten Kameras auf gezeichnet , dass nicht notwendigerweise 
ein Stereoansatz zwischen den Kameras besteht. Solchermafien 
sind die Kameras nicht notwendigerweise synchronisiert . 

In einem zweiten Schritt erfolgt gemafi der vorliegenden Er- 
findung die Extraktion von Gesichts- oder Formmerkmalen des 
Insassen bzw. der Insassen des Pkw f s, insbesondere der Augen, 
der Nasenlocher, des Mundwinkels, der Augenbrauen, des Haar- 
ansatzes oder dergleichen. 

In einem weiteren Schritt erfolgt die Initialisierung eines 
Trackingverfahrens anhand eines anthropometrischen Modells 
des Kopfes. Als besonders vorteilhaft hat sich erfindungs- 
gemafi ein Trackingverf ahren nach Greg Wech und Gary Bishop 
erwiesen, das in "SCAAT: Incremental Tracking with Incomplete 
Information", 1996, University of North Carolina at Chapel 
Hill, CB 3175, Sitterson Hall, Chapel Hill, NC, 27599-3175 
oder "One-Step-at-a-Time Tracking", 1996, University . of North 
Carolina at Chapel Hill, CB 3175, Sitterson Hall, Chapel 
Hill, NC, 27599-3175, beschrieben wird. Diese Trackingver- 
fahren nach dem Stand der Technik bieten eine wesentlich ver- 
besserte Schatzungsrate und Latenz, eine verbesserte Genauig- 
keit und einen verbesserten Rahmen fur die Vereinigung von 
Daten, die von einer Vielzahl nicht notwendigerweise 
synchronisierter Sensoren (Kameras) herruhren. Der Inhalt der 
zwei oben genannten Wech et al. Verof fentlichungen wird 
hiermit durch Bezugnahme vollstSndig eingeschlossen. Beide 
Verof fentlichungen sind unter www.es, unc.edu/ als TR96-051 
bzw. TR96-021 verfugbar. 
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Erf indungsgemafi basiert das Tracking auf Kalman-Filterung 
aller auf gezeichneten Merkmale, wobei die Kameras nicht 
notwendigerweise wie beim Stereoansatz synchronisiert sein 
mussen. In einer vorteilhaf ten Weise kann beim asynchronen 
Betrieb mit mehreren Kameras entsprechend der Anzahl der 
Kameras ein Vielfaches an Bildern in der gleichen Zeit 
auf gezeichnet werden. 

In einem weiteren Schritt wird gemali der vorliegenden Erfin- 
dung die Verfikation der detektierten Merkmale mit Verfahren 
der statistischen Mustererkennung durchgef uhrt . Hier werden 
bekannte Mustererkennungsverf ahren, wie beispielsweise neuro- 
nale Netzwerke, neuronale Fuzzy-Systeme, und Mustererken- 
nungssysteme mit Bildbibliothek eingesetzt, die zum Teil 
gemali dem in der Einleitung der vorliegenden Beschreibung 
geschilderten Stand der Technik implement iert werden. 

Auf den Verifikationsschritt folgt ein Trackingschritt der 
verif izierten Merkmale anhand des Kopfmodells. 

In einer weiteren Ausbildung des erf indungsgemafi en Verfahrens 
erfolgt die Blickrichtungserkennung oder die Bestimmung des 
Zustands der Augenlieder des Insassen bzw. der Insassen 
mittels bekannter Verfahren. Daraus ist auch eine 
Miidigkeitsdetektion mit entsprechenden Warnschritten 
ableitbar. Nach einem weiteren Aspekt des erf indungsgemafien 
Verfahrens ist eine Detektion der Kopfhaltung des Insassen 
bzw. der Insassen moglich. 

Die vorliegende Erfindung hat eine Vielzahl von praktischen 
Anwendungen, von denen nachstehend einige exemplarisch aufge- 
zahlt werden. 
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So ermSglicht die Bestimmung der 3D-Kopf position von Fahrer 
oder Beifahrer z.B. eine situationsangepasste AuslSsung des 
Airbags. Die Auslosung des Airbags kann abhSngig von der er- 
fassten Position durch den Controller 3 verhindert werden, 
falls in dieser Position das Risiko einer Verletzung des 
Fahrers oder Beifahrers besteht. 

Die Bestimmung der Kopfhaltung bzw. der Blickrichtung der 
Insassen erlaubt im Zusammenspiel mit einer f ahrzeugtiblichen 
Umgebungssensorik eine situationsangepasste Warnung des Fah- 
rers und gegebenenf alls des Beifahrers, 

Die Kenntnis des Augenzustandes (of f en/geschlossen) kann zur 
Mlidigkeitsdetektion verwendet werden. Hierzu kann auch die 
aus den Videodaten extrahierte Augen-Blinzelrate herangezogen 
werden. 

Die exakte Bestimmung der 3D-Kopf position erlaubt eine adap- 
tive Einstellung der Kopfstutze 5 zur individuellen Optimie- 
rung der Insassensicherheit . Die erf indungsgemaJie Vorrichtung 
und das erf indungsgemaJie Verfahren iiberwindet die aus der US- 
Bl-6 088 640 bekannten Probleme, die durch die ungenaue Aus- 
richtung des Kopfes mit den Sensoren oder durch interferie- 
rende Gegenstande entstehen kdnnen. 

Ferner kann bei bekannter Augenposition eine automat ische, 
individuelle Einstellung des Sitzes 6 erfolgen. 

Aufierdem kann die Erfindung zur Bedienung eines Bildtelefons 
fiir Telematikanwendungen im Fahrzeug genutzt werden. Auch 
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ware eine Erkennung der Gesichtsmerkmale des Fahrers zum 
Zwecke der Authentif izierung denkbar. 

Die vorliegende Erfindung kann vielfaitig verandert werden. 
So kann z.B. die Anzahl und Position der in den Figuren 1 und 
2 gezeigten Kameras verandert werden, ohne sich vom 
Schutzumf ang der Erfindung zu losen. Dabei ist es denkbar, 
mehr als ein Kamerapaar einzusetzen, wobei jedes Paar auf 
einen Fahrzeuginsassen ausgerichtet und nicht 

notwendigerweise nach einem Stereoansatz betrieben werden 
muss. Es ist ebenfalls denkbar, wie bereits erwahnt, 
schwenkbare Kamerapaare einzusetzen. 

Wenn Merkmale in den Anspruchen mit Bezugszeichen versehen 
sind, so sind diese Bezugszeichen lediglich zum besseren Ver- 
standnis der Anspruche vorhanden. Dementsprechend stellen 
solche Bezugszeichen keine Einschrankungen des Schutzumf angs 
solcher Element e dar, die nur exemplar isch durch solche Be- 
zugszeichen gekennzeichnet sind. 
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DaimlerChrysler AG Farago/Bopple 



Patent ans p ruche 

1. Verfahren zur Bestimmung der 3D-Position von Fahr- 
zeuginsassen, das folgende Schritte umfasst: 

Beobachtung der Fahrzeuginsassen mit mindestens zwei 
Kameras (1, 2, l f , 2 1 )/ die derart angeordnet sind, dass 
diese nicht notwendigerweise nach einem Stereoansatz 
betrieben werden miissen; 

Extraktion geeigneter Merkmale aus den auf gezeichneten 
Videodaten der Fahrzeuginsassen; 

Initialisierung eines Trackingverf ahrens anhand eines 
Kopf mo dells; 

Verifikation der extrahierten Merkmale mittels 
Mustererkennung; und 

Tracking der verif izierten Merkmale anhand des 
Kopfmodells . 

2. Verfahren nach Anspruch 1, worin die Merkmale aus 
einer Gruppe gewahlt sind, die aus Gesichts- oder Formmerk- 
malen der Insassen bestehen. 

3. Verfahren nach Anspruch 2, worin die Gesichts- oder 
Formmerkmale Augen, Nasenlocher, Mundwinkel, Augenbrauen oder 
Haaransatz umfassen. 
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4. Verfahren nach einem oder mehreren der Anspruche 1-3 , 
worin die Kameras (1, 2, 1\ 2 1 ) nicht synchronisiert sein 
miissen. 

5 5. Verfahren nach einem oder mehreren der Anspruche 1-4, 

worin die Kameras (1, 2, l 1 , 2 1 ) mit unterschiedlichen Blick- 
feldern derart positioniert sind, dass ein Auge eines Fahrers 
(4) immer sichtbar ist. 

10 6. Verfahren nach einem oder mehreren der Anspruche 1-5 , 

das weiterhin den Schritt der Bestimmung der Kopfhaltung von 
Insassen umfasst. 

7- Verfahren nach einem oder mehreren der Anspruche 1-6, 
15 das weiterhin den Schritt der Bestimmung der Blickrichtung 
von Insassen umfasst. 

8. Verfahren nach einem oder mehreren der Anspruche 1-7, 
das weiterhin den Schritt der Bestimmung des Zustands der 

20 Augenlider der Insassen umfasst. 

9. Verfahren nach einem oder mehreren der Anspruche 1-8, 
worin der Trackingschritt auf die Kalman-Filterung aller 

auf gezeichneten Merkmale der Kameras (1, 2; l 1 , 2') basiert, 
25 wobei die Kameras asynchron betrieben werden konnen. 

10. Verfahren nach einem oder mehreren der Anspruche 
1-9, worin das Kopfmodell ein anthropometrisches Modell ist. 



30 
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11. Verfahren nach einem oder mehreren der Ansprilche 
1-10, worin die Mustererkennung eine statist ische 
Mustererkennung ist. 



5 12- Vorrichtung zur Bestimmung der 3D-Position von 

Fahrzeuginsassen, die folgendes umfasst: 

mindestens zwei Kameras (1, 2, l 1 , 2 f ) zur Beobachtung 
der Fahrzeuginsassen, die derart angeordnet sind, dass diese 
nicht notwendigerweise nach einem Stereoansatz betrieben 
10 werden miissen; und 

einen Controller (3), der folgendes umfasst: 

Mittel zur Extraktion geeigneter Merkmale aus den 
aufgezeichneten Videodaten der Fahrzeuginsassen; 

Mittel zur Initialisierung eines Trackingschritts anhand 
15 eines Kopfmodells; 

Mittel zur Verifikation der extrahierten Merkmale 
mittels Mustererkennung; und 

Mittel zum Tracking der verif izierten Merkmale anhand 
des Kopfmodells. 

20 

13. Vorrichtung nach Anspruch 12, worin die Merkmale aus 
einer Gruppe gewahlt sind die aus Gesichts- oder Formmerkma- 
len der Insassen bestehen. 

25 14. Vorrichtung nach Anspruch 13, worin die Gesichts- 

oder Forramerkmale Augen, NasenlScher, Mundwinkel, Augenbrauen 
oder Haaransatz umfassen. 
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15. Vorrichtung nach einem oder mehreren der Ansprttche 
12-14, worin die Kameras (1, 2, I 1 , 2') nicht synchronisiert 
sein mussen. 

16. Vorrichtung nach einem oder mehreren der Anspruche 
12-15, worin die Kameras (1, 2, l 1 , 2') mit unterschiedlichen 
Blickfeldern derart positioniert sind, dass ein Auge eines 
Fahrers (4) immer sichtbar ist. 

17. Vorrichtung nach einem oder mehreren der Anspruche 
12-16, die weiterhin Mittel zur Bestimmung der Kopfhaltung 
von Insassen umfasst. 

18. Vorrichtung nach einem oder mehreren der Ansprttche 
12-17, die weiterhin Mittel zur Bestimmung des Zustands der 
Augenlieder der Insassen umfasst. 

19. Vorrichtung nach einem oder mehreren der Anspruche 
12-18, worin die Mittel zum Tracking ausgebildet sind, die 
Kalman-Filterung aller auf gezeichneten Merkmale der Kameras 
(1, 2; l f , 2 f ) durchzufuhren, wobei die Kameras asynchron 
betrieben werden konnen. 

20. Vorrichtung nach einem oder mehreren der Anspruche 
12-19, worin die Kameras (1, 2) im Frontbereich des Fahrzeugs 
(10) angeordnet sind. 

21. Vorrichtung nach einem oder mehreren der Ansprttche 
12-19, worin eine Kamera (l 1 ) im Frontbereich und die andere 
Kamera im Seitenbereich des Fahrzeugs (10) angeordnet ist. 
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22. Vorrichtung nach einem oder mehreren der Anspruche 12-: 
worin der Controller (3) weiterhin Mittel umfasst, urn anhand 
der detektierten Kopfposition die Ausldsung eines Airbags 
und/oder die Einstellung einer Kopfsttitze (5) und/oder die 
Einstellung eines Sitzes des Fahrzeugs zu steuern. 
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DaimlerChrysler AG Farago/BOpple 



Zusammenf assun g der Erf indung 

Verfahren und Vorrichtung zur Bestimmung der 3D-Position von 
PKW-Insassen 

5 

Die vorliegende Erfindung betrifft ein Verfahren zur Bestim- 
mung der 3D-Position von Fahrzeuginsassen, das folgende 
Schritte umfasst: Beobachtung der Fahrzeuginsassen mit min- 
destens zwei Kameras (1, 2, l f , 2 1 )/ die derart angeordnet 
10 sind, dass diese nicht notwendigerweise nach einem Stereoan- 
satz betrieben werden mussen; Extraktion geeigneter Merkmale 
aus den auf gezeichneten Videodaten der Fahrzeuginsassen; Ini- 
tialisierung eines Trackingschritts anhand eines Kopfmodells; 
Verif ikation der extrahierten Merkmale mitt els Mustererken- 
15 nung; und Tracking der verif izierten Merkmale anhand des 
Kopfmodells. Die Erfindung betrifft ebenfalls eine Control- 
ler-basierende Vorrichtung zur Implementierung des obigen 
Verf ahrens • 
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(Figur 1) 
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